CoEvo-RSI: When Harnesses Evolve, Which Models Should Follow?
CoEvo-RSI:当执行框架演化时,哪些模型应跟随?
🧭 Agent 递归自我提升 · 脑体协同演化
National University of Singapore · Agency for Science, Technology and Research (A*STAR) · SenseTime Group Inc.
用元智能体协调历史执行框架与模型检查点选择/合并,并用自身拒绝采样轨迹 SFT,减少递归自我提升中的脑体不匹配
📌 工作参考价值(3 点)
- 在电商/广告 Agent 链路中,每次改动工具、prompt 或执行脚手架时,不要只做 prompt 调优;维护“harness 版本—模型 checkpoint—执行反馈”档案,用元智能体在历史设计中选 checkpoint/合并,再在新 harness 下用 rejection-sampled 轨迹做 SFT,能明显降低脑体不匹配。
- 可建立“失败归因→局部更新”的轻量闭环:从线上执行日志筛出成功轨迹(例如 SQL 生成成功执行、指令被正确执行)做 rejection sampling,对 7B/9B 小模型做 SFT,成本低且可追上大模型;适合垂直场景的护栏优化。
- 模型合并/checkpoint 选择策略可作为“脑”的版本管理:当召回、排序、query 改写等 Agent 组件升级时,按执行反馈选择与当前 harness 兼容的历史 checkpoint 或融合多个 checkpoint,减少能力丢失与行为约束。